1
Giải quyết Vấn đề Hư cấu: Phương pháp Mở Sách với RAG
EvoClass-AI005Lecture 4
00:00

Thách thức chính khi sử dụng AI trong môi trường chuyên nghiệp là vấn đề hư cấu. Điều này xảy ra khi các Mô hình Ngôn ngữ Lớn (LLMs) tự tin tạo ra những sự thật, ngày tháng hoặc trích dẫn giả mạo vì chúng buộc phải dựa vào các mẫu trong dữ liệu huấn luyện thay vì thông tin xác thực và thời gian thực.

1. Từ "Sách Đóng" đến "Sách Mở"

Hầu hết người dùng tương tác với AI theo kiểu "Sách Đóng", nơi mô hình hoàn toàn phụ thuộc vào trọng số nội bộ (bộ nhớ) của nó. Để đạt được độ chính xác cấp chuyên nghiệp, chúng ta chuyển sang Tạo sinh được tăng cường truy xuất (RAG). Phương pháp "Kiểm tra Sách Mở" này cung cấp cho AI những tài liệu cụ thể và liên quan để tham khảo trước khi đưa ra phản hồi.

2. LLM như một động cơ suy luận

Trong khung RAG, LLM ngừng hoạt động như một cơ sở dữ liệu tĩnh và bắt đầu hoạt động như một động cơ suy luận. Khi bạn đặt câu hỏi, hệ thống sẽ trích xuất những đoạn văn liên quan từ "Bộ não thứ hai" của bạn (tập tin PDF và ghi chú đã chọn lọc) và trình bày chúng như ngữ cảnh. Vai trò của mô hình chuyển từ "nhớ lại từ trí nhớ" sang "tóm tắt và tổng hợp các sự kiện đã cung cấp." Điều này đảm bảo đầu ra được căn cứ vào dữ liệu cụ thể của bạn, được biểu diễn bởi logic:

$$ \text{Phản hồi} = \text{LLM}(\text{Câu hỏi} + \text{Ngữ cảnh}) $$

Luồng logic RAG
Question 1
Why do LLMs "hallucinate" in a professional context?
They are programmed to lie to the user.
They try to predict the next word based on outdated or insufficient training data.
They have too much access to real-time internet data.
Question 2
In the RAG methodology, what is the primary purpose of the "Context"?
To make the prompt longer and more expensive.
To provide a factual anchor that prevents the model from drifting into invention.
To teach the model a new language.
Challenge: Reducing Error Probability
Applying RAG principles to legal documents.
You need to use an AI to summarize a 50-page legal contract without it making up clauses.
Step 1
Identify the "Search Space" for the AI.
Solution:
Instead of asking general questions, upload the PDF to a RAG-enabled tool (like NotebookLM) to constrain the AI’s search space strictly to that specific document.